Gia đình Fugger đầu tiên trở nên giàu có nhờ nghề dệt và buôn bán. Jakob Fugger "giàu có" mở rộng lợi ích của họ bằng cách khai thác mỏ bạc và kinh doanh với Venice. Ngoài ra ông là một nhà tài chính và xem Vatican là một khách hàng đáng chú ý. Gia đình ông trở thành những người hỗ trợ tài chính cho nhà Habsburg và ông đã tài trợ cho cuộc bầu cử thành công của Karl V làm Hoàng đế của Đế quốc La Mã Thần thánh trong 1519.[2]

Fuggerei được xây dựng lần đầu tiên giữa năm 1514 và 1523 dưới sự giám sát của kiến trúc sư Thomas Krebs, và vào năm 1582 Hans Holl thêm vào Nhà thờ St. Mark cho khu nhà ở này. Được mở rộng hơn nữa trong năm 1880 và 1938, Fuggerei ngày nay bao gồm 67 ngôi nhà với 147 căn hộ, một cái giếng, và một tòa nhà hành chính. Fuggerei bị hư hỏng nặng do các vụ đánh bom Augsburg trong Thế chiến II, nhưng đã được xây dựng lại theo kiểu ban đầu.

Ông cố của Wolfgang Amadeus Mozart, nhà thợ nề Franz Mozart, sống ở Fuggerei giữa năm 1681 và 1694, và được kỷ niệm ngày nay bằng một bảng đá.